Ko-WideSearch: A Korean Breadth-Search Benchmark for Exhaustive Set Enumeration by Web Agents
Ko-WideSearch:韩语广度搜索基准,评估Web Agent穷举枚举能力
🧭 Agent 广度搜索基准
Upstage AI
提出韩语广度搜索基准Ko-WideSearch,揭示当前Agent擅长找回实体集合但严重缺失行级属性填充
📌 工作参考价值(4 点)
- 可借鉴其自动化合成-验证流水线思路,低成本构建领域内结构化信息枚举任务,用于评估搜索Agent的广度搜索能力。
- 电商场景中常有“列出XX品类下所有品牌及各自属性”需求,可参考该基准的表格化评估方式,同时关注集合完整性与单元格正确性。
- 难度旋钮设计(表格宽度、复合键)可迁移到渐进式任务生成,按需控制Agent需要跨多少页面聚合信息。
- 发现自由文本单元格是主要失败点,提示在业务Agent中应优先优化开放式属性抽取,可考虑结合知识库或结构化提示约束输出。